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PROCEDE POUR L 1 ARRET D'UNE FRAGMENTATION D 1 IMAGES NUMERIQUES 

La pr^sente invention concerne un proc€de pour 1' arret 
de la fragmentation d' images num^riques, notamment dans le 
domaine de la compression d f images vid€o. 

Pour transmettre ou enregistrer des images num^riques, 
5 on utilise couramment des proc^des de codage qui r€duisent> la 
quantity d 1 information trahsmise et, en consequence, la bande 
passante n^cessaire & cette transmission. 

Certains de ces procedes de codage font appel a une 
segmentation des images en regions dites homogenes, c'est-a-dire 
10 en regions ayant un caract#re uni forme suivant un ou plusieurs 
critdres tels que la chrominance et/ou la luminance des pixels 
(elements d' image) de cette region. 

Des lors, on peut remplacer la transmission des 
donnees de luminance et de chrominance concernant chaque pixel 
15 d'une region par une simple transmission des donnees de lumi- 
nance et de chrominance de la region consider€e. 

Par ailieurs, on peut faire appel a cette segmentation 
pour le codage inter- image. Ainsi, avant de transmettre ou 
d 1 enregistrer les informations relatives a l f 6tat, par exenple 
20 de luminance et chrominance, d'une region ainsi definie, on 
determine si ces informations ont d&jk ete transmises ou 
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enregistrees . En d'autres termes, on determine si cette region a 
deja ete identifiee dans une image prealablement transmise. 

Si cette region n'a pas ete identifiee dans une image 
anterieure, on transmet l 1 ensemble des informations relatives a 
5 cette region de 1' image. 

Au contraire, si cette region a ete identifiee lors de 
la transmission d'une image prec^dente, on transmet seulement un 
signal representant le deplacement de cette region par rapport 
1 ' image anterieure . 
10 Ainsi, a la reception ou a la lecture, cette region 

est reconstitute a partir des informations deja transmises pour 
une image prtcedente. 

Par exemple, on considere une strie d 1 images com- 
prenant toutes ion meme fond bleu uniforme et immobile* Dans ce 
15 cas, en considerant que ce fond bleu forme une seule region, les 
informations concernant cette region sont uniquement transmises 
pour la premidre image* Ensuite, le codage des images suivantes 
ne comporte que des indications indiquant la presence et la 
localisation de cette region. 

2 0 Ainsi, le fond bleu est recree pour toutes les images 

a partir des informations transmises (ou enregistrees) pour 
1' image initiale. 

Une description d'un proctde connu de segmentation 
d 1 images est effective ci-dessous £ l f aide de la figure jointe. 
25 Sur cette figure, on a represents les differentes 

etapes d'un procede 10 de segmentation d' images, cette 
segmentation comprenant deux operations preliminaires, l'une, 
20, relative k la luminance et I 1 autre, 22, relative & la 
chrominance ou k des paramdtres analogues comme decrit 

3 0 ulterieurement . 

II convient de souligner que l f operation 22 relative a 
la chrominance des pixels est denommee "fragmentation" tandis 
que la partition finale de 1' image suivant des cri teres de 
chrominance et de mouvement apparent des pixels - decrite 
35 ulterieurement - est denommee "segmentation". 
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L 1 operation 20 comprend la comparaison des luminances 
des pixels d ! une image courante 14± par rapport aux luminances 
des pixels d'une image anterieure 12±. Cette comparaison 
determine les mouvements ou les variations de luminance des 
5 pixels de 1' image 14 ± par rapport aux pixels de 1' image 12 ±. 

On attribue ainsi a chaque pixel P de I 1 image courante 
14± un vecteur 15 p dit de "flot optique" representatif du 
mouvement ou de cette variation de luminance de ce pixel P. Pour 
cela, ce vecteur 15 p est d§crit par des coordonnees (dx, dy) 
10 caracterisant le mouvement de 1 ! image au pixel P de coordonnees 
(x,y) • 

Lors de 1' operation 22, on effectue une fragmentation 
F de l 1 image 14i en fragments F 1# F2, ♦ bas£e sur la 

couleur. Pour cela, on utilise les informations de luminance^ 
15 de l 1 image 14^, ainsi que des Evaluations 16 et 18 de? la 
repartition des couleurs rouge et bleue par des signaux 
respectifs et de chaque pixel Pi de 1' image 14^. 

Ensuite, £ partir des fragments F^, F2, • . -Pn ainsi 
obtenus, on obtient la segmentation finale de l f image 14i par le 

2 0 regroupement de ces fragments Ff en parties R± f appel€es 

regions, suivant une operation 30 faisant intervenir des 
parametres de mouvement - cette operation etant d£crite 
ult£rieurement . 

II exist e de nombreux proc6d6s permettant d f effectuer 
25 cette fragmentation F de 1' image en fragments F^, F2# . ..Fjj de 
couleur homogene - 1 1 homog&i^ite £tant definie suivant la 
qualite de fragmentation exig£e. 

Par ailleurs, il convient de noter que d'autres 
critdres peuvent §tre utilises pour effectuer cette 

3 0 fragmentation. 

Par exemple, la fragmentation peut s 1 effectuer suivant 
un critere dit "de texture" base sur les distributions spatiales 
des niveaux de gris dans 1' image. Pour cela, on caracterise ces 
textures par des critSres d 1 homogeneity de contraste, 
35 d' orientation privil6gi6e ou de periodicity. 
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Dans cette description, on utilise tine fragmentation 
basee sur la fusion, deux par deux, de fragments voisins de 
couleur similaire. Plus concretement , a partir de deux fragments 
voisins dits "de depart" on cree un nouveau fragment dit 
5 "d'arrivee" conprenant les deux fragments fusionnes- 

Ensuite, on repete ce procede en considerant ce 
fragment d'arrivee comme un nouveau fragment de depart. 

Pour determiner la sequence des fusions - une seule 
fusion etant effectuee & chaque etape - on calcule un cout Cf u 
10 associg a chaque fusion envisageable . 

Ce cout Cf u , dont le calcul est d£crit ci-dessous, est 
representatif de la difference de couleur entre les deux 
fragments dont la fusion est envisagee. 

Ainsi, en proc^dant a la fusion (F^Fj) des fragments 
15 Fi et Fj dont le cout Cf u de fusion est le plus has parmi tous 
les couts de fusion envisages, on fusionne les fragments les 
plus similaires en chrominance parmi tous les fragments pouvant 
§tre fusionn£s. 

Dans cette realisation, le calcul du cout Cf u de 
20 fusion entre deux fragments F^ et Fj est le suivant : 

C fu - T^TNj [(Y i- Y D >2 + (U i" U j )2 + (Vi-Vj)2] 

Dans cette formule, Ni est le nombre de pixels dans le 
fragment Fi et Nj est le nombre de pixels dans le fragment Fj et 
( Yi - Yj ) , (\3± -Uj ) et (Vi -Vj ) repr£sentent , respect ivement , les 
differences de luminance et de couleurs entre les deux fragments 
F i et F j . 

A partir de cette fusion entre les deux fragments F^ 
et Fj r on obtient un nouveau fragment Ffc= F^uFj comprenant les 
pixels des deux fragments F^ et Fj de depart. Ce nouveau 
fragment F^ comprend done = + N j pixels. 

Ce nouveau fragment F\^= F^uFj est alors caract£ris§ 
par une luminance Y^ £gale & la moyenne des luminances des 



25 



30 
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fragments fusionnes ponderees par le nombre de pixels presents 
dans chaque fragment. 

Plus precisement, lors de la fusion du fragment F± 
avec le fragment Fj , la nouvelle luminance moyenne du fragment 
5 Ffc est egale a : 

Y k = (Ni*Yi +Nj*Yj)/(N i+ Nj) 

De ra§me, on definit , les parametres et de 

differences de couleur du nouveau fragment F^ comme, 
respectivement : 
10 U k = (Ni*Ui +Nj *Uj > / (N i+ Nj ) , 

Vk= (Ni*Vi +Nj*Vj)/(Ni+Nj) . 

Chaque pixel constitue un fragment de depart pour la 
premiere £tape de fragmentation. Par la suite, les pixels non 
fusionnes demeurent des fragments. 
15 Toutefois, un nombre N minimal de fragments est speci- 

fic de facpon a arreter la segmentation lorsque ce nombre de 
fragments est atteint. 

Ainsi, on obtient N fragments Fi, F 2 , ... F N conrposant 
1' image 14 ±, chacun de ces fragments comprenant un nombre donn€ 
20 de pixels N^, N 2 , . . .Njj. 

Le coCLt de la fusion entre F^ et Fj etant 
proportionnel £ Ni.Nj/Ni+Nj, si on suppose un debut de fusion 
isotrope, plus le nombre de pixels concerne par une fusion est 
inportant, plus le coalt de cette fusion est §lev§, privilSgiant 
25 ainsi la fusion de petit s fragments et done tone fragmentation 
isotrope de 1» image. 

Ensuite, au cours d'une operation 24, on estime un 
modele param^trique caract^ristique du mouvement de tous les 
pixels de chaque fragment F 1# F 2 , ... F N tel que precedemment 
30 obtenu. 

Pour cela, on caracterise chaque fragment F^ par un 
moddle 24^ parametrique de mouvement reli6 aux conposantes 
horizontale dx et verticale dy du vecteur I5p de mouvement de 
chaque pixel de coordonn€es spatiales (x,y) du fragment F±. 
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Plus precisement, on choisit un modele 24 affine a 6 
parametres (a,b, c, d,e, f ) tel que les composantes dx et dy du 
vecteur 15 p de mouvement d'un pixel P de coordonnees (x,y) 
soient egales a 
5 dx = a + b.x + c.y , dy = d + e.x + f .y. 

Ainsi, un seul modele 24 de parametres de mouvement a 
6 composantes d€crit le mouvement de tous les pixels du fragment 
considere. 

Les parametres a, b, c, d, e et f du modele 24^ sont 
10 determines suivant la technique dite des moindres carres a 
partir des vecteurs mouvement 15 p estim^s en chaque pixel lors 
de 1'etape 20, 

Plus concrdtement, a partir d'un modele 24«i 
(a 1 ,b' ,c' ,d' ,e' ,f 1 ) de depart, on fait varier ses parametres de 
15 fagon a minimiser un ecart entre les vecteurs "rSels" 15p et 
les vecteurs calcules a partir de ce modele suivant les forrrtules 
ci-dessus. 

Pour ^valuer cet €cart E^, on calcule la somme des 
carres des differences entre les vecteurs mouvement 15 p de 
20 chaque pixel et les vecteurs reconstruits a partir du modele 
decrit precedemment . 

Par exemple, pour un vecteur 15 p de coordonnees 
(dx,dy) modelis§ par un module 24^ (a,b,c,d,e,f ) : 

E mo =(dx - (a + b.x + c.y)) 2 + (dy - (d + e.x + f.y)) 2 . 
25 Le modele paramitrique final (a,b,c,d,e,f ) est obtenu 

lorsque cet Scart ou "variance" est minimal. Cette variance 

dans la modelisation du mouvement du fragment F^ est alors 
designe comme Var24i» 

De fagon g6n6rale, les Evaluations decrites ici ne 
3 0 tiennent pas compte des valeurs dites " aberrant es", c f est-a-dire 
des valeurs excessivement differentes des valeurs globalement 
estim€es . 

En paralldle, lors d'une operation 26, la 
fragmentation F peut etre comparSe a la segmentation de 1' image 
35 12 i pr§c£dente. 
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Par exemple, on identifie les eventuelles 
correspondances 28 entre la localisation de fragments et Fj 
et la localisation d T une region R ! ±, cette region R'^ etant le 
resultat final de la segmentation de 1 1 image 12 ± suivant une 
5 operation 30 decrite ult^rieurement . 

Ces correspondances 28 peuvent etre utilisSes lors 
d* operations necessitant le suivi d'objet(s) sur une serie 
d' images, par exemple dans le domaine du trafic routier. 

Ensuite, lors de 1' operation 30, on effectue un 
10 procede de regroupement analogue au procede de fusion decrit 
lors de 1' operation 22. Ainsi, on applique un processus it^ratif 
concernant deux fragments voisins qui minimisent un coftt C re de 
regroupement, ce regroupement creant un nouveau fragment de 
depart . 

15 Lors de cette operation 30, le cotit de f vision est 

lvalue a partir des modeles 24 ^ de parametres de mouvement de 
chaque fragment. 

Ainsi, les deux fragments regroup^s a chaque etape de 
1 'operation 30 sont les fragments pr^sentant la plus grande 

2 0 similitude de mouvement parmi toutes les paires de fragments 

voisins. 

Par exemple, en considerant deux fragments F^ et Fj 
caract^rises par des modeles param£triques respect if s 24 ± (a±, 
b±, c±, d±, , &±, fi) et 24j (aj, b j , c j , dj, e j , fj), la 
25 similitude de mouvement entre ces deux fragments est calcul6e de 
la faqron suivante, oxi I'on a suppose que le fragment F^ est de 
plus grande taille que le fragment Fj : 

On calcule un vecteur de mouvement 15 p j/i pour chaque 
pixel du fragment Fj suivant le modele 24 ± param6trique du 

3 0 fragment Fi. Ainsi, pour un pixel de coordonn^es (x j , yj) de Fj, 

on calcule le vecteur 15pj/i de coordonn^es (dxj/i, dyj/^) 
suivant les formules suivantes : 

d^j/i - *i + bi xj + ci yj 

dyj/i - d i+ e ± xj .'+ f iy j 
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Ensuite, on lvalue le vecteur 15 p j/j de mouvement de 
ce pixel suivant le modele 24 j parametrique de ce fragment, 
c ' est-a-dire 

dxj/j = aj + bjXj + cj yj et 

dyj/j = dj + ejXj + f jyj 

Finalement, on evalue la difference entre ces deux 
vecteurs 15 p j/i et 15 p j/j en calculant une difference Apj/i 
Apj/i = (dxj/j - dxj/i)2 + (dyj/j - dyj/i) 2 . 
On calcule alors la moyenne des Apj/i de tous les 
pixels de Fj pour obtenir une evaluation Aj/i de la difference 
entre les modeles parametriques des deux fragments Fi et Fj . 

Des lors, on regroupe les fragments Fi et Fj dont la 
difference Aj/i de mouvement est inferieure a un seuil 
predetermine - ce seuil etant d'autant plus faible que la 
concordance entre fragments doit etre grande pour que ces 
fragment soient regroupes. 

Toutefois, lors de cette operation 30 de regroupement 
on ne calcule pas de nouveau parametre 24 de mouvement pour un 
fragment cree par un regroupement. En effet, ces calculs 
complexes necessiteraient des durees trop importantes. 

C'est pourquoi, lors de cette operation 30, on 
attribue a cbaque fragment cree par un regroupement un vecteur 
de mouvement egal a l'un des vecteurs de mouvement des deux 
fragments regroupes. 

Dans cette realisation, on attribue au. fragment 
resultant du regroupement le parametre de mouvement du fragment 
regroupe de plus grande taille. 

Par exemple, on considere le regroupement entre deux 
fragments F'i et F'j tels que le nombre de pixels N'i du 
fragment F'i soit superieur au nombre N'j de pixels du fragment 
F'j. On accelere le calcul en attribuant au fragment F'^ obtenu 
par le regroupement de F'i et de F'j un vecteur 24 ' k de 
mouvement egal au vecteur 24 '±. 

Ces regroupements iteratifs s'effectuent jusqu'a 
l'obtention d'un nombre determine de fragments. 
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Lorsque cette operation de regroupement est achevee, 
on obtient alors un nombre donn§ de fragments "finaux" ou de 
regions Ri qui caracterisent la segmentation de l f image suivant 
ce procede. 

5 L' ensemble des pixels P compris dans une region R± est 

alors homogdne en mouvement, ce parametre etant caracterise par 
un modele 24± unique pour 1' ensemble de tous les pixels de la 
region R^. 

Avant de transmettre (ou d'enregistrer) cette segmen- 

10 tation, on effectue alors une operation 33 de marquage au cours 
de laquelle on identif ie les regions composant 1 ! image 14i . 
Ainsi, lorsque 1' image 16i post€rieure a l 1 image 14i sera analy- 
st, on pourra utiliser cette segmentation pour proc^der k 
l 1 operation 26 avec 1' image 16±. 

15 Pour cela, une dernidre etape 35 est necessaire au 

cours de laquelle on affecte cette segmentation 35 d' un retard 
correspondant au d^lai d' apparition de 1' image 16i suivante. 

Comme mentionne pr6c6demment , la fragmentation F de 
l 1 image en fragments est arret^e suivant un critere de nombre 

20 de fragments obtenus. Ainsi, lorsque le nombre de fragments 
obtenus atteint un certain seuil, le procede de fusion s'arrete. 

La pr^sente invention resulte de la constatation que 
ce critere d 1 arret ne fournit pas tin resultat optimise. En 
effet, suivant ce proc6d6, la fragmentation d'une image trds 

25 simple produit une fragmentation excessive de cette dernidre 
tandis que la fragmentation d'une image complexe - comprenant de 
multiples details - produit une fragmentation insuff isante. 

La presente invention permet d'obtenir une fragmen- 
tation qui s'adapte sL la nature des images, 

30 Elle concerne un procede de fragmentation d 1 image 

utilisant une Evaluation du co&t de fusion entre fragments, ce 
coQt de fusion 6tant de la forme coilt (FiUFj) = A *B, oil A est 
ion terme proportionnel a tine difference de couleur et/ou de 
luminance et 8 est un terme inversement proportionnel a un 

35 nombre de pixels, et ce procedS est caract€ris6 en ce que le 
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cout est pondere par un nouveau coefficient C homogene a un 
ncmbre de pixels. Le cout d'une fusion pouvant etre alors evalue 
par rapport a une difference de couleur ou de luminance, il est 
possible d'arreter une fragmentation lorsqu'un seuil de couleur 
et/ou de luminance est atteint, adaptant ainsi la fragmentation 
a la complexity de 1' image. 

Dans une realisation, le coefficient C est 
proportionnel a 2/ N m ou 1^ represente une taille moyenne des 
fragments F-j., tel qu'un nombre moyen de pixels par fragment Fj.. 

Le(s) parametre(s) de selection est (sont) au moins, 
par exemple, l'un des parametres suivants : la luminance, la 
chrominance et la texture. 

Selon un mode de realisation, chaque fusion iterative 
ne concerne que deux fragments Fi et Fj voisins. 

Par ailleurs, le facteur A est, dans un exemple, 
proportionnel a -£52S£L , ou N ± et Nj sont representatifs de la 

taille de chaque fragment F± et Fj voisins fusionnes-la taille 
d'un fragment pouvant etre le nombre de pixels compris dans ce 
fragment . 

Selon un mode de realisation, le facteur B est 
proportionnel a [(Yi-Yj) 2 + (Ui-Uj) 2 + (Vi-Vj) 2 ], ou (Yi-Yj), (Ui- 
D 2 ) et (Vi-Vj) representent, respectivement, la difference entre 
les luminances et les signaux de couleur bleue et rouge de 
chacun de ces deux fragments. 

Par ailleurs 1' invention concerne aussi un procede de 
regroupement des fragments d'une image obtenus par un procede 
suivant une des realisations precedentes. Ce procede de 
regroupement utilise un modele de mouvement propre a chaque 
fragment Fi, ce modele de mouvement etant determine avec une 
erreur ou variance connue, de facon a attribuer au fragment cree 
par ce regroupement un meme modele de mouvement. 

On regroupe ainsi a chaque etape de ce procede les 
deux fragments Fi et Fj qui minimisent un cout C re de 
regroupement proportionnel a une evaluation de la difference 
entre les modeles de mouvement des deux fragments Fi et Fj. 
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Dans une realisation, le cout (C re ) de regroupement 
est inversement proportionnel a un seuil S re de mouvement tel 
que, en l 1 absence d' autre test d 1 arret, le regroupement n'est 
pas permis si 1* evaluation Ai/j est superieure a ce seuil S re , 

Plus precisement, selon une realisation le co\it C re 
de regroupement est calculi suivant la formule : 



NixNj \, A -i 
re " Ni+Nt Ll A i/j)/ b reJ' 



Ni+Nj 

10 ou Ni est le nombre de pixels du fragment Fi et Nj est le nombre 
de pixels du fragment Fj . 

Par ailleurs, dans le cas oil le fragment Fj est d'une 
taille superieure & la taille du fragment Fi, 1' evaluation Aj/i 
de la difference de mouvement entre ces fragments Fi et Fj 

15 coraprend ,par exemple, les etapes suivant es: 

- calcul d'un vecteur de mouvement pour chaque pixel P 
(x,y) du fragment Fj suivant le module de parametres (a^, bi, 
c i' di., e i' ^i^ mouvement du fragment F±, de fagon k ce que, 
pour un pixel P de coordonn€es (xj , yj) de F j , on calcule un 

20 vecteur 15 p j/i de coordonn^es (dxj/i, dyj/i> suivant les 
formules suivantes : 

dxj/i - a i + b i x j + ci yj 
dyj/i - d ± + eixj + f ± yj 

- evaluation du vecteur 15 p j/j de mouvement de ce 
25 pixel P suivant le module 24 j de parametres (ai, h±, c±, d±, 

f^) de ce fragment Fj , c'est-^-dire 

^j/j = a j + b j x j + c j Yj et 
dyj/j = d j + ej xj + f jyj 

- Evaluation de la difference Apj/i entre ces deux 
3 0 vecteurs 15pj/i et 15pj/j en calculant 

Apj/i = (dxj/j - dxj/i) 2 + (dyj/j - dyj/i)2 

- Evaluation Aj/i de la difference de mouvement entre 
fragments Fi et Fj en sommant les valeurs Apj/i de tous les 
pixels du fragment Fj puis en divisant par Nj . 
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Dans une realisation de ce precede de regroupement la 
taille d'un fragment est definie comme le nombre de pixels 
compris dans ce fragment. 

Par ailleurs, le seuil S re de regroupement est, de 
5 preference, proportionnel a une erreur ou variance de la 
modelisation de mouvement du fragment . 

Selon un module de realisation, le seuil S re de 
regroupement est proportionnel au maximum entre la variance du 
modele de mouvement du fragment et la moyenne des variances 
10 des modules de mouvement des fragments de 1 ! image. 

Dans un mode de realisation, le seuil S re de 
regroupement est plus eleve lorsque l'on regroupe des fragments 
dont les pixels etaient compris dans une meme region d'une image 
precedente. Le regroupement est ainsi moins selectif dans ce 
15 cas. 

Toutefois, un test de prediction de luminance peut 
§tre utilise avant d'appliquer ion seuil S re de regroupement 
moins selectif. 

Ainsi, suivant une realisation, le fragment Fj §tant 

20 d'une taille superieure a la taille du fragment F^, la 
prediction de luminance s'effectue en calculant, pour chaque 
pixel P de coordonnees (xj , yj ) du fragment Fj , le vecteur de 
coordonnees (dxj/i, dyj/^) , la luminance predite en P (xj , yj) 
dans I 1 image courante etant celle trouvee en (xj - dxj/i, yj - 

2 5 dy j ) dans 1 1 image precedent e . 

Par ailleurs, de fagon a favoriser le regroupement de 
fragments en rggions de taille arbitraire, on peut utiliser 

un test d 1 arret de regroupement utilisant le cout C re de 
regroupement multiplie par un coefficient tel que, en appelant 

30 N'i le maximum entre le nombre de pixels du fragment F^ et 
Nntin, et N'j le maximum entre le nombre Nj de pixels du fragment 
Fj et Nmin. Dans ce cas, le test d 1 arret s'ecrit: 

C re (FiuFj) * > 1 

35 
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Dans une realisation de ce procede de regroupement la 
taille d'un fragment est definie comme le nombre de pixels 
compris dans ce fragment. 

Par ailleurs, le seuil S re de regroupement est, de 
5 preference, proportionnel a une erreur ou variance de la 
modelisation de mouvement du fragment F^. 

Selon un modele de realisation, le seuil S re de 
regroupement est proportionnel au maximum entre la variance du 
modele de mouvement du fragment et la moyenne des variances 
10 des modeles de mouvement des fragments de 1' image, 

Dans un mode de realisation, le seuil S re de 
regroupement est plus eleve lorsque l f on regroupe des fragments 
dont les pixels etaient compris dans une meme region d'une image 
precedente. Le regroupement est ainsi moins selectif dans ce 
15 cas. 

Toutefois, un test de prediction de luminance peut 
etre utilise avant d'appliquer un seuil S re de regroupement 
moins selectif. 

Ainsi, suivant une realisation, le fragment Fj etant 
20 d'une taille superieure a la taille du fragment F^, la 
prediction de luminance s'effectue en calculant, pour chaque 
pixel P de coordonnees (xj, yj) du fragment Fj, le vecteur de 
coordonnees (dxj/i, dyj/^), la luminance predite en P (xj, yj) 
dans 1" image courante etant celle trouvee en (xj - dxj/^, yj - 
25 dyj/i) dans 1' image precedente. 

Par ailleurs, de fagon a favoriser le regroupement de 
fragments en regions de taille arbitraire, on peut utiliser 

un test d' arret de regroupement utilisant le cout C re de 
regroupement multiplie par un coefficient tel que, en appelant 
30 N'i le maximum entre le nombre N± de pixels du fragment F^ et 
N min' et N? j le maximum entre le nombre Nj de pixels du fragment 
Fj et ^xt[±n* Dans ce cas, le test d f arret s'ecrit: 



C re (FiUFj) * i > 1 

re N'i*N'j 
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Toutefois, on peut utiliser un autre critere d' arret 
de regroupement tel que 

C re (FiUFj) > 1 

de fagon a ne pas defavoriser le regroupement de fragments de 

taille superieure a Nmin- 

D'autres caracteristiques et avantages de 1' invention 
apparaitront avec la description de certains de ses modes de 
realisation. 

Dans cette description d'une realisation preferee de 
1' invention, on utilise un calcul du cout de fusion de fragment 
similaire a celui decrit ci-dessus lors de 1' operation 22, 
c'est-a-dire : 

- Cout (FiUFj) = [(Yi-Yj) 2 + (Ui-U-j) 2 + (Vi-Vj) 2 ] 

Ni + Nj 

On constate que, dans cette formule, le cout de fusion 
des deux fragments Fi et Fj est egal au produit de facteurs A et 
B tels que : 

A = fg| et B = [(Yi-Yj) 2 + (Ui-Uj) 2 + (V^Vj) 2 ] 

Des lors, de fa<?on a utiliser un critere d 1 arret 
homogene a une difference de couleur et de luminance, on 
introduit deux etapes suppldmentaires : 

Dans un premier teirps, on multiplie le cout de toute 
fusion envisagee par un facteur C homogene a 1' inverse d'un 
nombre de pixels, 

Dans une realisation preferee, C = 2/ 1%, ou N m 
represente la taille moyenne en pixels des fragments a une 
etape donnee de la fragmentation. En d'autres termes, si a une 
etape donnee de la fragmentation on considere k fragments Fi, 
?2' ••• F K comprenant respectivement Ni, ...et Nk pixels ; 

1^ - (N X + N 2 + . . . + Njc) /K . 

On comprend que le facteur C est obtenu en considerant 
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que Ni = Nj = N m/ d'oil il resulte que A = — ™ =— ^ 

2N m ^ 

et pour obtenir AC = 1, il faut C=— ^— . 

Nm 

Dans un deuxieme temps, on compare le produit 
coat (Fi^Fj)*C, c'est-^-dire A*B*C, a un seuil S c fix<§. 
5 Si A*B*C < S c , l'ecart en luminance et couleurs entre 

les deux fragments est inferieur a l'ecart seuil fixe pour 
arreter la fragmentation. La fusion est done autoris^e car les 
deux fragments sont suffisamment similaires. 

Si A*B*C > S c , l'^cart en luminance et couleurs entre 
10 les deux fragments est sup^rieur au seuil fixe, la fusion n'est 
pas autoris^e et la fragmentation s'arrete. 

De ce fait, le test d'arr§t de la fragmentation ne 
correspond plus a un nombre determine de fragments & atteindre, 
mais a un seuil d'homog6n£it£ entre fragments au-dela duquel les 
15 fusions n'ont plus lieu. 

Ainsi, en fonction de la complexite de 1' image, le 
nombre de regions resultant de la segmentation de 1' image est 
variable . 

Par ailleurs, en utilisant le terme 2/Nm, independant 

2 0 des fragments consideres pour la fusion, on favorise la fusion 

de pet its fragments. 

En effet, le coQt de la fusion est proportionnel a la 
difference de luminance et couleurs - facteur B - et a un 
facteur A*C egal & (Ni x Nj/Ni+Nj) -2/1^. 
25 Du fait de ce facteur A*C, si les fragments F± et Fj 

ont une taille inferieure a la moyenne, ce facteur est inferieur 
a 1. 

Au contraire, si les fragments F^ et Fj ont tone taille 
superieure k la moyenne, ce coefficient A*C est sup&rieur a 1 et 

3 0 le cotit de la fusion est accru. 

Le seuil de f vision S c est homogene au carre d'une 
difference de luminance et/ou de couleur . On a constate qu'un 
seuil de 3* A 2 , oil A represent e 6 niveaux de gris sur chaque 
composante, fournit des rSsultats satisf aisants . 
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Selon un autre aspect, la presente invention r£sulte 
aussi de la constatation que le regroupement de fragments Pi 
lors de l 1 operation 30 suivant un critere de difference de 
mouvement fixe n 1 optimise pas cette operation de fusion. En 
effet, 1 'utilisation d'un seuil fixe ne permet pas une bonne 
stabilite de la segmentation. 

De fait, lors du traitement d'une image, les 
estimations de mouvement et leur precision varient 
considerablement entre fragments. Par exenple, on peut traiter 
un premier fragment avec une estimation de mouvement variant 
entre - 1 et + 1 pixel, d'une precision de ± 0,25 pixel, et un 
deuxieme fragment avec une estimation de mouvement variant entre 
- 30 et + 30 pixels, avec vine precision de ± 2 pixels. 

II apparalt alors que l'utilisation d'un seuil fixe, 
par exemple pour ces deux estimations , n 1 optimise pas la 
caracterisation de leur mouvement puisque ce seuil serait. 
inadapte - trop limite et/ou trop large- pour ces fragments. 

C'est pourquoi, dans une realisation, qui peut §tre 
utilisee independamment des autres realisations, on calcule un 
cout C re de regroupement variable en fonction des fragments 
concerns et prenant en compte 1' evaluation Aj/i de la 
difference entre les modeles parametriques des fragments 
regroup#s et un seuil S re de regroupement li§ §l la variance 
Var 24i du modele de mouvement du plus petit fragment regroupe, 
tel que d§fini prgc^demment , et a la segmentation pr£alable 
d 1 image ant6rieure. 

Dds lors, les regroupement s possibles entre fragments 
F± et Fj sont classes suivant un cotit C re (FivjFj)engendr£ par 
leur regroupement. Dans cette realisation pref^ree, ce coilt 
C re (FiuFj) est calcule suivant la formule suivante : 

C re (FiuFj)= |^*| * [(Ai/j)/ S re] 

Ainsi, il est possible de regrouper les fragments dont 
le coftt de regroupement est moindre, c'est-a-dire les fragments 
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les plus similaires suivant le critere de mouvement, tout en 
inqposant un seuil S re d* arret de regroupetnent relatif a la 
difference de mouvement entre fragments. 

La segmentation de 1 1 image est alors am^lioree 
5 puisqu'elle est fonction de la nature de 1' image et non d'un 
nombre predetermine de segments a atteindre. 

Le seuil de regroupement S re tient compte du fait que, 
comme decrit precedemment , la determination du noddle 
parametrique 24 j de mouvement d'un fragment Fj permet de 
10 determiner la variance Var24j de ce modele. Des lors, cette 
variance represente une marge de tolerance devant etre prise en 
compte lors de 1' evaluation de la similitude de mouvement entre 
fragments. 

Ainsi, dans une realisation qui peut etre utilis^e 

15 independamment des autres realisations, le seuil S re de 
regroupement est proportionnel £ la variance Var24 j , ce seuil 
S re etant d'autant plus eieve que la variance Var 2 4j est grande. 
En d f autres termes, plus 1 1 incertitude sur la modeiisation du 
mouvement d'un fragment est grande, plus le seuil S re = de 

20 tolerance pour le regroupement est grand. 

Ainsi, lorsque la determination d'un modele . 24j[ 
parametrique d'un fragment F^ entraine une grande marge d ' erreur 
- Var24j - le seuil S re de regroupement de ce fragment F^ prend 
en coirpte cette approximation et est plus eieve, permettant un 

25 regroupement de ce fragment avec une exigence moindre sur la 
similitude de mouvement. 

Toutefois, il est possible que le seuil de 
regroupement soit trds faible suite a une bonne modeiisation du 
mouvement du fragment Fj, c'est-a-dire lorsque Varj est faible. 

3 0 Dans ce cas , le regroupement du fragment F j avec 

d' autres fragments est penalise si le seuil de regroupement est 
directement proportionnel a la variance de son modele de 
mouvement, auquel cas le seuil serait faible. 

Pour eviter cette situation, dans une realisation qui 

35 peut etre utilisee independairenent des autres realisations, a 
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chaque etape de regroupement, on effectue une estimation de la 
moyenne Var m des variances Var24j de modelisation du mouvement 
de chaque fragment Fj puis on fixe le seuil de regroupement d'un 
fragment Fj au maximum Max (Var 2 4 j * v * r m) entre la variance 
5 Var 2 4j propre au fragment regroupe et la variance Var m moyenne. 

Ernpiriquement , les meilleurs r^sultats sont obtenus 
pour un seuil de regroupement fixe S 0,5* Max(Var24j, Var m ) . 

Plus concretement, on peut considerer le regroupement 
entre deux fragments Fi et F j , ces deux fragments etant les 
10 fragments qui minimisent le coflt de regroupement C re calcule 
pour toutes les paires de fragments de depart . 

En considerant que le fragment Fi est plus petit que 
le fragment Fj , par exenple suivant un critere de nombre de 
pixels, on lvalue le seuil S re de regroupement avec une 
15 tolerance fonction de la variance Var 2 4i* 

Toutefois, parallSlement, on evalue la. variance 
moyenne Var m de tous les fragments de depart. Ainsi, si lors de 
cette Stape il existe k fragments F x , F 2 / . ..F^ de variance 
respective Var 2 4i, Var 2 4 2 , — Var 2 4k , on a : 
20 Var m = (Var 241 + Var 242 + . Var 2 4k) /k 

Dds lors, si cette tolerance Var m est plus elev€e que 
la variance Var 2 4i f on d€terminera le seuil S re en fonction de 
Var m . Ainsi, le regroupement du fragment Fi n'est pas sounds & 
une tolerance moindre que dans le cas "moyen" . 
25 Par ailleurs, on lvalue ce seuil S re de regroupement 

en fonction de la segmentation prealable d' image ant^rieure. 

En effet, cette realisation, qui peut §tre utilis^e 
independamment , resulte de la constatation que l 1 operation 26 de 
comparaison entre les fragments Fi issus de la fragmentation 22 
3 0 couleur et les regions R f i issus de la segmentation pr^cedente 
de 1' image 12^ anterieure permet de siitplifier les calculs en 
faisant des predictions & l'aide d'eventuelles correspondances 
entre la segmentation d'une image 12^ et la fragmentation de 
l 1 image suivante. 
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En effet, grace a cette comparaison 26, il est 
possible de determiner si des fragments Fi et Fj de 1 ! image en 
cours de traitement correspondent a des zones de l 1 image 
pr£alablement regroup^es dans l 1 image precedente, e'est-a-dire a 
5 une mime region. 

C'est pourquoi , dans une realisation qui peut etre 
utilisSe independamment des autres realisations, en supposant 
que pes fragments sont k nouveau regroupes, on fixe alors un 
seuil de regroupement plus Sieve pour ces fragments, favorisant 
10 ainsi leur regroupement. 

Par exemple, on peut fixer ce seuil S re de la fagon 
suivante : S re = 4 * Max (Var m , Var j ) . 

Toutefois, il est possible que cette supposition soit 
inexacte, par exemple lorsqu'un deplacement d'objets se produit 
15 entre deux images. 

Dans ce cas, un seuil de regroupement trop el6v6 peut 
favoriser un regroupement de fragments qui ne correspondent pas 
& des objets de meme mouvement . 

Pour eviter cette situation, on fixe une condition sur 
20 la variation de luminance du fragment Fj k partir de 1' image 
precedente 12 j permettant de detect er un eventuel mouvement 
d'objet entre les deux images. 

Par exemple, cette condition peut etre fixSe par une 
analyse des predictions de luminance. 
25 Cette prediction de luminance, par exemple associee au 

fragment Fj et au module parametrique 24 x , est definie de la 
f agon suivante : 

En chaque pixel P de coordonn£es (xj , yj ) du fragment 
Fj, le vecteur 15pj/i de coordonn§es (dxj/i, dyj/i) est calcule 
3 0 comme explique precedemment . DSs lors, la luminance predite en P 
( X j, yj) dans 1" image 14^ est celle trouvee en (xj - dxj/i, yj - 
dyj/i) dans 1" image 12i. 

On d£f init alors une erreur de prediction comme etant 
la moyenne des differences entre les luminances predites et les 
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luminances reelles de tous les pixels P de coordonnees (x-j , yj) 

du fragment F j . 

Une telle erreur de prediction de luminance est 
calculee sur un fragment considers avant son regroupement et 
apres son regroupement avec un autre fragment. La fusion est 
acceptee si cette erreur de prediction ne varie pas de facon 
excessive, 1' erreur permise etant fonction de la resolution 

predetermin^e . 

Dans ce cas, on peut supposer qu'il y a correspondance 
entre les fragments Fi et Fj et appliquer un seuil de 
regroupement plus el eve . 

Eitpiriquement, 1' erreur entre ces predictions est 
fix6e a un ecart de sept niveaux de gris. 

En tenant compte des remarques pr6c6dentes, il 
apparait que 1 • utilisation d'un critere d'arr§t suivant un 
calcul de cotlt C re de regroupement tel que defini par la 
formule : 

C re (Fi^Fj) = [( A i/j)/Sre ] 

permet de tenir corrpte de caracteristiques propres a 

chaque fragment. 

De plus, il est possible de classer les regroupements 
possibles suivant le coat C re et de favoriser le regroupement 
des fragments les plus similaires suivant ce critere. 

Par ailleurs, il est possible que 1 'utilisateur d'un 
tel algorithme de segmentation desire obtenir pr€f erentiellement 
des regions d'une taille donn€e, par exemple comprenant un 
nombre de pixels, 

De fait, dans une realisation qui peut §tre utilis§e 
ind^pendamment des autres realisations, apres chaque 
regroupement de fragments, on applique un test d' arret tenant 
coctpte de ce choix. Par exenple, en appelant N'i le maximum 
entre le nombre Ni de pixels du fragment et JSndn et N f j le 
maximum entre le nombre Nj de pixels du fragment Fj et ^ n ±n < on 
impose la condition : 
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C re (FiuFj) * 



NH+N'j 



> 1 



D£s lors, le terme 



Nl+N'j 



favorise le regroupement 



des fragments de taille inferieure a Nmin- 

Toutefois, ce terme desavantage le regroupement de 
fragments de grande taille. 

C'est pourquoi, dans une realisation, on utilise un 
deuxi£me critere d'arr§t de regroupement en alternance avec le 
critSre d' arret de regroupement precedetnment decrit. Plus preei- 
s^ment, on considere un deuxieme cout de regroupement C' re tel 



on peut etablir un deuxieme critdre d' arret qui permet a des 
fragments dont la difference de mouvement est inferieure au 
seuil de regroupement de se regrouper. 



comme critere d' arret • 

Dans cette realisation, on alterne 1 'utilisation des 
deux critdres d' arret de fagon a obtenir une segmentation de 
1* image qui ne "penalise" pas un fragment pour sa taille. 



que 



C're - E( Ai/j)/Sre] . 



Ainsi, en utilisant ce deuxieme coftt de regroupement, 



Par exemple, on impose C re = [( Ai/j)/S re ] > 1 
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REVENDICATIONS 



1. Procede de fragmentation (F) d 1 images (14i)en 
regions (Ri) homogenes, cette fragmentation (F) utilisant des 
fusions iteratives de fragments F± et Fj les plus similaires 
suivant au moins un parametre de selection, cette similarite 
etant evaluee par un produit A*B de deux facteurs A et B, A 
etant homogene a un nombre de pixels et B etant homogene au(x) 
parametre (s) de selection, caracterise en ce qu'une fusion est 
effectuee lorsque le produit A*B*C est inferieur a un seuil 
homogene au parametre de selection, C etant un facteur homogene 
a 1' inverse d'un nombre de pixels. 

2. Procede suivant la revendication 1 caracterise 
en ce que C est proportionnel a 2/ Nm ou N m represente une 
taille moyenne des fragments Fi, tel qu'un nombre moyen de 
pixels . 

3 . Procede suivant la revendication .1 ou 2 
caracterise en ce que le(s) parametre (s) de selection est (sont) 
au moins l'un des parametres suivant s : la luminance, la 
chrominance et la texture. 

4. Proceed suivant la revendication 1, 2 ou 3 
caracterise en ce que chaque fusion iterative ne concerne que 
deux fragments Fi et Fj voisins. 

5. Proceed suivant la revendication 4 caracterise 

en ce que le facteur A est proportionnel a " ix ^j, , ou % et Nj 

Nl + Nj 

sont representatifs de la taille de chaque fragment F± et Fj 
voisins fusionnes. 

6. Proc£d£ suivant la revendication 5 caracterise 
en ce que la taille d'un fragment est le nombre de pixels 
compris dans ce fragment. 

7. Proceed suivant l'une quelconque des 
revendications precedent es, caracterise en ce que le facteur B 
est proportionnel a [(Yi-Yj) 2 + (Ui-Uj) 2 + (Vi-Vj) 2 ], ou (Yi-Yj), 
(Ui-U2) et (Vi-Vj) representent, respectivement, la difference 
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entre les luminances et les signaux de couleur bleue et rouge de 
chacun de ces deux fragments. 

8. Procede de regroupement de fragments d'une image 
obtenus par un procede selon l'une quelconque des revendications 

5 precedentes, caracterise en ce que ce regroupement utilise un 
modele (24^) de mouvement propre a chaque fragment F^, ce modele 
(24 ±) de mouvement etant determine avec une erreur ou variance 
(Var24i) connue, de fagon a attribuer au fragment cree par ce 
regroupement un m§me modele (24^) de mouvement, regroupant a 
10 chaque etape de ce procede les deux fragments F± et Fj qui 
minimisent un cout C re de regroupement proportionnel a une 
evaluation (Ai/j) de la difference entre les modeles (24f, 24 j) 
de mouvement des deux fragments F± et Fj . 

9. Proc6d6 suivant la revendication 8, caracterise 
15 en ce que le coftt (C re ) de regroupement est inversement 

proportionnel & ion seuil S re de mouvement tel que, en I 1 absence 
d 1 autre test d'arrit, le regroupement n'est pas permis * si 
I 1 evaluation Ai/j est sup^rieure a ce seuil S re . 

10. Procede suivant la revendication 9, caracterise 
20 en ce que le cout C re de regroupement est calcule suivant la 

formule : 

Cre " lf?§t [( A i/j)/ S re], 

25 ou Ni est le nonibre de pixels du fragment Fi et Nj est le nombre 
de pixels du fragment Fj . 

11. Proc§d§ suivant la revendication 8, 9 ou 10, 
caracterise en ce que le fragment Fj 6tant d'une taille 
sup^rieure a la taille du fragment F±, 1 1 evaluation Aj/i de la 

30 difference de mouvement entre ces fragments F^ et Fj cotrprend 
les etapes suivantes: 

- calcul d'un vecteur (15pj/i) de mouvement pour 
chaque pixel P (x,y) du fragment Fj suivant le moddle 24± de 
paramdtres (ai, b^, c^, di, ei, f±) de mouvement du fragment Fi, 

35 de fagon £ ce que, pour un pixel P de coordonn£es (xj, yj) de 
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Fj, on calcule un vecteur 15 p j/i de coordonnees <dxj/i, dyj/i) 
suivant les forrnules suivantes : 

dxj/i - a i + b i x j + c i ^ 
dyj/i = d i+ e ± xj + fiyj 
5 - evaluation du vecteur 15pj/j ^ e niouvement de ce 

pixel P suivant le modele 24 j de parametres (ai, bi, Ci, di, ei, 
fi) de ce fragment Fj , c'est-a-dire 

dxj/j = aj + b j x j + c j Yj et 
dyj/j = dj + ejXj + f jyj 
10 - Evaluation de la difference Apj/i entre ces deux 

vecteurs 15pj/i et 15 p j/j en calculant 

Apj/i = (dxj/j - dxj/i) 2 + (dyj/j - dyj/i> 2 
- evaluation Aj/i de la difference de mouvement entre 
fragments Fi et Fj en sommant les valeurs &Pj/i de tous les 
15 pixels du fragment Fj puis en divisant par Nj . 

12. Procede selon la revendication 11 caracterise en 
ce que la taille d'un fragment est d§finie comme le nombre de 
pixels compris dans ce fragment. 

13. Proc§d£ selon l f une quelconque des 
20 revendications 9 i 12, caracterise en ce que le seuil S re de 

regroupement est proportionnel a une erreur ou variance Var24i 
de la mod#lisation (24i) de mouvement du fragment Fi. 

14. Procede selon l'une quelconque des 
revendications 9 a 12, caract£ris€ en ce que le seuil S re de 

25 regroupement est proportionnel au maximum Max (Var24i, Var m ) 
entre la variance (Var 2 4j) du modele (24 j) de mouvement du 
fragment Fi et la moyenne (Var m ) des variances des modeles de 
mouvement fragments de l f image, et de preference §gal a 0.5* Max 
(Var 2 4i/ Var m ) . 

3 0 15. Procede suivant la revendication 13 ou 14, 

caracterise en ce que le seuil S re de regroupement est plus 
eieve, le regroupement Stant ainsi moins select if, lorsque l'on 
regroupe des fragments dont les pixels etaient compris dans une 
meme region d'une image pr£c6dente. 
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16. Precede suivant les revendications 11 et 15, 
caracterise en ce qu'un test de prediction de luminance est 
utilise avant d'appliquer un seuil S re de regroupement moins 
selectif . 

5 17. Proc^de suivant la revendication 16, caracterise 

en ce que le fragment Fj etant d'une taille superieure a la 
taille du fragment F^, la prediction de luminance s'effectue en 
calculant, pour chaque pixel P de coordonnees (xj, yj) du 
fragment F j , le vecteur 15pj/^ de coordonnees (dxj/i, dyj/^) , la 
10 luminance pr^dite en P (xj , yj) dans l 1 image courante etant 
celle trouvee en (xj - dxj/£, yj - dy^/±) dans l 1 image 
precedente . 

18. Procede suivant l'une quelconque des 
revendications 8 £ 17, caracterise en ce qu'on favorise le 
15 regroupement de fragments en regions de taille Nmi n arbitraire 
en utilisant un test d'arr§t de regroupement utilisant le coftt 
C re de regroupement multiplie par un coefficient tel que, en 
appelant N'i le maximum entre le nombre N± de pixels du fragment 
F i et Nmin' et N'j le maximum entre le nombre Nj de pixels du 
fragment Fj et Nmin , on utilise le test d' arret : 
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C re (Fi^Fj) * > 1 

19. Proc£de suivant l'une quelconque des 
25 revendications 8 a 18, caracterisi en ce qu'on utilise le 
crit£re d'arr§t du regroupement : 
C re (Fi^Fj) > 1 
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